Национальный инвестиционный рейтинг

Для каждого региона формируется база из 35-40 экспертов на основании списков кандидатов, представленных деловыми объединениями («Опора России», ТПП РФ, РСПП, «Деловая Россия») и Агентством стратегических инициатив (АСИ).

Выборка респондентов для экспертной оценки формируется случайным образом из списка представленных кандидатов. Количество опрошенных респондентов по каждому из регионов – не менее 20.

Опрос по показателям, по которым нет специфических требований к респондентам, осуществляется с помощью многоступенчатой стратифицированной (квотной) выборки, представляющей качественную модель бизнеса региона в общем, а также репрезентирующей каждый регион по двум критериям – размер и отрасль предприятия.

Для каждого региона строится общая выборка предприятий на основе данных официальной региональной статистики о количестве действующих предприятий. В основу структуры выборочной совокупности закладываются критерии репрезентативности: размер предприятия, определяемый по ФЗ числом сотрудников и годовым объемом выручки, а также отрасль, согласно коду ОКВЭД. Предприятия-респонденты выбираются по квотам случайным образом. Принцип случайности отбора респондентов обеспечивается механическим путем внутри сформированной совокупности по каждому из регионов.

Объем базовой выборки составляет 300 респондентов на регион (максимальная статистическая погрешность составит 5,5%).

Данная выборка формируется с помощью невероятностного отбора одноступенчатым способом.

Отбор осуществляется «целевым» (направленным) способом. Отбор респондентов осуществляется на основе наличия реального опыта взаимодействия предпринимателей с органами власти по тем или иным вопросам либо получение определенных услуг, столкновение с определенными ситуациями и т.п.

Для каждой группы вопросов формируется базовая совокупность. При этом могут использоваться списки потенциальных респондентов, представленные деловыми объединениями («Опора России», ТПП РФ, РСПП, «Деловая Россия»), АСИ, а также федеральными, региональными и местными органами исполнительной власти, ведомствами, организациями, осуществляющими оцениваемые действия (например, регистрацию предприятий или подключение к электросетям).

Из заданной совокупности случайным образом опрашивается необходимое количество респондентов. При необходимости базовая совокупность может быть рекрутирована несколько раз.

Внутри каждой из базовых совокупностей осуществляется механический (систематический) отбор. Минимально возможное количество опрошенных при целевом отборе для каждого региона настоящего исследования – 25 респондентов (за исключением ситуаций, когда вся генеральная совокупность менее 25).

После формирования массива исходных данных расчет Национального рейтинга производится и представляется на четырех уровнях:

1. Показатели – это сведенные и обработанные исходные данные, приведенные для каждого показателя к единой шкале от 0 до 100, где 0 – наихудшее возможное измерение, 100 – наилучшее.
2. Факторы – это среднее арифметическое значений баллов по нормированным значениям показателей, входящих в факторы. Например, балл за фактор «Эффективность процедур по выдаче разрешения на строительство» формируется на основании трех показателей: среднее время получения разрешения на строительство, среднее количество процедур, необходимых для получения разрешения на строительство, оценка деятельности органов власти по выдаче разрешения на строительство.
3. Направления – это средние арифметическое значений баллов факторов, входящих в направление. Например, балл за направление «Защита бизнеса» формируется из четырёх факторов: инструменты правовой защиты бизнеса, административное давление на бизнес, силовое давление на бизнес, разрешение споров.
4. Интегральный индекс – это среднее арифметическое значений по всем восьми направлениям Национального рейтинга.

Переходы от одного уровня представления данных к другому осуществляются путем агрегирования. Все переходы агрегирования можно разделить на два качественно разных этапа.

Этап 1: переход от собранных исходных данных к полному набору показателей по всем субъектам РФ в единой шкале (переход от уровня исходных данных к уровню показателей).

В собранных исходных данных может быть несколько характерных проблем:

• В них могут быть выбросы;
• Некоторые данные могут быть пропущены (быть недостаточного качества для использования).

Также области значений всех показателей достаточно сильно различаются и после всех дополнительных преобразований для удобства восприятия все их нужно привести к одной шкале 100-балльной шкале, где 0 - худшее значение, 100 - лучшее значение. В случаях, когда для показателя требовалось нормирование с использованием восстановленной плотности, ни один регион может не получить значения 0 или 100.

Таким образом, для перехода от собранных исходных данных к полному набору показателей по всем регионам в единой шкале необходимо пройти следующую последовательность шагов, стандартную для работы с данными в рейтингах:

1. Обработка выбросов в исходных данных.
2. Расчет показателей.
3. Восстановление пропущенных данных.
4. Изменение шкалы с учетом плотности распределения (для статистических и опросных числовых параметров) и приведение всех показателей к единой шкале пропорциональным масштабированием.

Обработка выбросов в исходных данных

Проверка на наличие выбросов осуществляется только для типа данных «опрос-числовые параметры». К таким показателям, например, относится среднее время регистрации юридических лиц или среднее количество процедур, необходимых для получения разрешений на строительство. Выбросами считаются ответы отдельных респондентов, которые отклоняются от медианного ответа больше чем на 2 сигма, что соответствует попаданию в 2% хвост стандартного нормального распределения. Расчет стандартных отклонений от медианы ответов респондентов, а не от среднего, обусловлен тем, что при малом количестве ответов и экстремальных выбросах среднее значение заметно смещается в сторону выбросов. Это приводит к тому, что ответы, которые явно являются выбросами, могут не попадать в 2% хвост распределения.

Попадание в 2% хвост распределения не является жестким требованием для определения выбросов и может меняться в зависимости от характера полученных данных. Например, если при определении выбросов изначальным методом систематически обнаруживаются ответы, которые, явно являются выбросами, но не попадают в 2% хвост распределения, то имеет смысл увеличить зону выбросов, например, до 3% и оценить результат.

Расчет показателей

После обработки выбросов в опросных числовых данных, ответы респондентов агрегируются для получения единой оценки по показателю. Так, например, среднее время подключения к электросетям рассчитывается по отдельным ответам респондентов. Ответы в натуральных величинах на вопрос о времени подключения к электросетям агрегируются в одну цифру для субъекта РФ – среднее время подключения к электросетям. По показателям удовлетворенности для каждого респондента, считается средняя оценка по различным критериям удовлетворенности. Затем аналогичные оценки, полученные для всех респондентов, усредняются и получается средняя оценка удовлетворенности по региону в целом. Более подробное описание см. в документе «Таблица расчёта показателей».

Восстановление пропущенных данных

Исходные данные по некоторым субъектам РФ /показателям могут быть недостаточно качественными (например, количество респондентов в регионе ниже целевых значений, что серьезно повышает процент погрешности результата, большое количество ошибок в ответах респондентов и экспертов) или могут быть пропущены. Такие случаи необходимо обрабатывать особым образом.

Для расчета Национального рейтинга в случае отсутствия данных, их недостаточного количества или их низкого качества используется восстановление значения. Применяется следующая схема восстановления: если есть рассчитанный парный показатель «среднее время – среднее количество процедур», то значение показателя восстанавливается по среднему значению по группе рассчитанного парного показателя. В случае отсутствия такого показателя к полученным в этом году ответам добавляются ответы, собранные в прошлом году, в случае возможности рассчитать значение оно используется как восстановленное. Во всех остальных случаях отсутствия значений восстановление производится по значению прошлого года.

Восстановленное значение используется исключительно для целей расчета Рейтинга, однако оно не является результатом региона по пропущенному показателю. Восстановленное значение не сообщается региону при раскрытии результатов Рейтинга (т.е. по пропущенному показателю в карточке региона ставится прочерк).

Приведение всех показателей к единой шкале пропорциональным масштабированием

В последнем шаге первого этапа агрегирования все значения показателей приводятся к шкале от 0 до 100 при помощи пропорционального линейного масштабирования. При этом 100 баллов соответствует наилучшему результату, а 0 – наихудшему.

Этап 2: переход между уровнями представления информации (от показателей к факторам, от факторов к направлениям, от направлений к интегральному индексу).

Факторы рассчитываются как средние значения, входящих в него показателей. Направления – как средние значения, входящих в него факторов. Интегральный индекс рассчитывается как усредненная сумма индексов по направлениям, и таким образом, ограничен шкалой от 0 до 100.